一、环境准备 根据官方文档,kylin是需要运行在hadoop环境下的,如下图: ? /kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz 2.下载 使用命令进行下载 wget http://mirrors.shu.edu.cn /apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz 或者先在本地下载,然后上传服务器 3.解压 tar -zxvf /start-hbase.sh 2.启动 kylin 进入 kylin 的 bin 目录,执行 . /kylin.sh start 即可启动kylin 3.访问kylin管理界面 启动kylin之后,浏览器访问:http://your_hostname:7070/kylin。
[root@compile src]# cd kylin/ # kylin版本切换 # 本文是基于HDP-3.1.4.0-315安装部署Kylin,HDP-3.1.4.0-315的Hadoop版本是 Kylin 本文基于HDP3.1大数据平台安装部署Kylin,大数据平台的安装部署参考博主的其他文章 2.2 安装部署 # 1.上传编译好的kylin安装包并解压 [admin@hdp01 apps 因为后续有可能会部署Kylin3.x,所在这里修改了metedata url,区分这里是2.x版本 kylin.metadata.url=kylin_2_metadata@hbase kylin.env.hdfs-working-dir KYLIN_HOME is set to /opt/apps/kylin # 10.设置HDFS权限,admin是Linux的普通用户 [admin@hdp01 kylin]$ sudo usermod 到这里,Kylin2.6就安装部署成功了! 3.
一、showdoc介绍1.1 showdoc简介Showdoc是一款在线文档工具,支持Markdown语法,可以用于快速记录、分享和协作文档。 自动化:可从代码注释中自动生成文档、搭配的RunApi客户端,可调试接口和自动生成文档。快速部署:可使用使用开源版本showdoc,快速在本地服务器部署showdoc。 地址 操作系统版本 内核版本 Teleport版本jeven192.168.3.166 centos 7.63.10.0-957.el7.x86_643.6.4-b32.2 本次实践介绍1.本次实践部署环境为个人测试环境 三、检查本地环境3.1 检查本地操作系统版本检查本地操作系统版本[root@jeven ~]# cat /etc/redhat-release CentOS Linux release 7.6.1810 图片图片8.4 添加文档添加文档。编辑文本内容,这里直接使用默认模板来测试。图片图片图片8.5 分享文档选择分享文档,复制文档链接。图片图片8.6 查看分享文档打开分享文档链接,查看分享文档内容。
此篇为大家带来的是Kylin的简单介绍及安装部署。 可伸缩性和高吞吐率:单节点Kylin可实现每秒70个查询,还可以搭建Kylin的集群。 4.BI工具集成 Kylin可以与现有的BI工具集成,具体包括如下内容。 安装部署Kylin(下面的所有步骤所有虚拟机均需操作) 1.将apache-kylin-2.5.1-bin-hbase1x.tar.gz上传到Linux ? 2. 解压apache-kylin-2.5.1-bin-hbase1x.tar.gz到/opt/module [bigdata@hadoop002 kylin]$ tar -zxvf apache-kylin // 结束Kylin [bigdata@hadoop002 kylin]$ bin/kylin.sh stop ?
已集成错误跟踪向 Telegram / Slack 报告印刷错误 Yandex Metrica集成 轻松部署 — 无需数据库和其他依赖 配置简单⚙️ 根据需要调整 UI。 ,生产环境请谨慎;2.在centos7.6环境下部署CodeX Docs文档工具。 (Core)3.2 检查系统内核版本检查系统内核版本[root@jeven ~]# uname -r3.10.0-957.el7.x86_64四、部署Node.js环境4.1 下载Node.js安装包在 安装包tar -xvJf node-v16.17.0-linux-x64.tar.xz4.3 链接二进制文件将 /root/node-v16.17.0-linux-x64/bin/下的二进制文件链接到/ 八、编辑文档8.1 点击新增页面点击新增页面8.2 编辑文档在编辑器内,编辑文档内容。保存文档8.3 查看文档效果保存完毕后,可以看到CodeX Docs的文档效果。
Fayson的github:https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1.文档编写目的 ---- Apache Kylin是一个开源的分布式分析引擎 的Apache社区官网,具体参考:http://kylin.apache.org/cn/,本文主要描述如何在CDH集群中部署及使用Kylin。 内容概述 1.下载Kylin 2.部署Kylin 3.Demo1 4.Demo2 测试环境 1.RedHat7.4 2.CM/CDH5.13.3 3.Apache Kylin2.1.0 4.集群未启用Kerberos 前置条件 1.CDH集群正常运行 2.Hive,HBase服务运行正常 3.安装Kylin服务的节点已经部署Hive Gateway 2.下载Kylin ---- 社区版kylin下载地址:https 3.部署Kylin ---- 这里测试只部署了一个节点,实际生产可以部署多个节点,kylin是无状态的,前端做负载均衡。 1.上传kylin包至服务器 ?
放弃不难,但坚持很酷~ HDP版本:3.0 Kylin版本:2.6.0 前言 本文主要讲解如何部署Kylin集群,采取多个Kylin实例共享HBase存储的模式,如果需要事先了解Kylin基本概念的朋友可以查看 一、安装启动Kylin 首先安装一个Kylin实例,然后再分析Kylin集群模式部署的注意点。 1. 解决hive用户不能访问/kylin/kylin_metadata /kylin/kylin_metadata文件主要存储同步Hive表基数的相关文件,以及存储构建cube的相关信息。 下图描绘了 Kylin 集群模式部署的一个典型场景: ? 如果您需要将多个 Kylin 节点组成集群,请确保他们使用同一个 Hadoop 集群、HBase 集群。 ,即仅有一台kylin可以配置为kylin.server.mode=all或kylin.server.mode=job,其余机器的kylin配置为kylin.server.mode=query。
1.2.1+ HBase: 1.1+ Spark (可选) 2.1.1+ Kafka (可选) 0.10.0+ JDK: 1.7+ OS: Linux -2.5.2 2,Kylin下载与安装 下载Kylin的时候,需要注意Kylin的版本,Kylin支持CDH,也有原生的版本。 下载完成后,将tar包上传到linux中,进行解压: tar -zxvf apache-kylin-2.5.2-bin-hbase1x.tar.gz 然后对解压后的目录改名: kylin.job.jar=/opt/kylin2.5.2/lib/kylin-job-2.5.2.jar kylin.coprocessor.local.jar=/opt/kylin2.5.2/lib 3,其他配置 第二部完成后,Kylin的部署工作刚完成一半,因为Kylin的边缘配置还有一些。
Kylin在部署的以后需要依赖Hadoop,Hive以及HBase等组件,最近公司内部在部署Kylin服务的时候遇到了不少问题。 主要是HBase集群是独立部署的,与Kylin部署的HDFS不是同一个,因此踩了许多坑,这里将遇到的一些问题记录下来,希望能帮助到大家。 Hadoop版本:2.7.3 Hive版本:2.1.1 HBase版本:1.2.6 Kylin版本:2.4.0和2.6.1均有 由于Kylin和HBase在两个不同的HDFS集群,因此为了让Kylin服务可以访问 kerberos的HDFS 1由于我们的Kylin所以来的HDFS是线上的,所以一般都部署了kerberos作为安全认证,但是HBase是独立部署的,因此HBase所在的HDFS是没有认证方式的,包括HBase 问题七 Kylin进程FULL GC挂掉 Kylin进程默认的JVM参数是相对比较小的,我们需要手动调大一些,在KYLIN_HOME/conf/setenv.sh中,有一个KYLIN_JVM_SETTINGS
⚠️核心场景边界声明本文档使用的银河麒麟Docker镜像,并非传统虚拟机替代品,需严格遵循容器设计理念:✅适用场景:国产化软件编译/兼容性验证特定商业软件要求完整国产OS环境的临时运行国产化应用适配测试 /arm64docker.xuanyuan.run/macrosan/kylin:v10-sp3-2403#amd64架构(x86服务器)dockerpull--platform=linux/amd64docker.xuanyuan.run dockertagdocker.xuanyuan.run/macrosan/kylin:v10-sp3-2403kylin:test⚠️生产环境禁止使用latest标签,需保持版本可追溯,避免部署一致性问题 kylin-test/data:/var/data\-v/data/kylin-test/conf:/etc/custom\-eTZ=Asia/Shanghai\--platform=linux/arm64 用户platform:linux/arm64#架构指定ports:-"5432:5432"volumes:-.
access_secret 仓库access_key 仓库状态 仓库状态 仓库名称 在Harbor中仓库的唯一ID 仓库credential类型 仓库access_secret 仓库access_key Harbor边缘部署文档 tls.key /etc/docker/certs.d/yourdomain.com/ cp ca.crt /etc/docker/certs.d/yourdomain.com/ 使用边缘Harbor部署工作负载
一.MetaQ安装部署情况: 地点 IP Broker ID Master/Slave Slave ID:Group 合肥 192.168.52.23 1 Slave 1:meta-slave-group-hf 部署 解压tar zxvfmetaq-server-1.4.6.2.tar.gz,将解压出来的taobao/metamorphosis-server-wrapper文件夹移动到/usr/lib下,并重命名为 9E%90 MetaQ Wiki:https://github.com/killme2008/Metamorphosis/wiki MetaQ用户指南:http://www.linuxidc.com/Linux /2013-11/92750.htm 分布式发布订阅消息系统 Kafka 架构设计 http://www.linuxidc.com/Linux/2013-11/92751.htm
Fayson的github: https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 我们在前面的文章简单介绍过Apache Kylin,请参考《如何在CDH中部署及使用Kylin》,文章中包含了如何在CDH上部署Kylin,以及创建cube,然后进行查询的两个demo例子。 本文主要描述如何在启用Kerberos的CDH集群中如何部署及使用Kylin。 3.部署Kylin ---- 这里测试只部署了一个节点,实际生产可以部署多个节点,kylin是无状态的,前端做负载均衡,kylin的负载均衡配置后续会有文章详细介绍。 5.创建kylin的kerberos账号,并生成kylin账号的keytab文件 ? 生成kylin账号的keytab文件 ? ? 并将kylin.keytab文件拷贝至部署Kylin的节点上 ?
/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties & 现在,我们的Kafka集群已经成功部署了 现在,我们已经成功地部署了Kafka集群,并使用Kafka提供的命令行工具测试了它的功能。
linux下离线安装docker 一、基础环境 1、操作系统:centos 7.3 2、docker版本:18.06.1 官方下载地址(打不开可能很慢) 4、官方参考文档: 二、docker安装 1、解压
等了好久,这次终于下决心在局域网部署了linux系统,并安装docker和load了onlyoffice,利用engineercms进行资料管理和文档协作。 我整理了完整文档,见我的网盘。 engineercms 0基础安装linux、onlyoffice和engineercms 1 〇、前言 1 一、U盘安装CentOS 7.0图文详解教程 2 二 、U盘安装 CentOS7类似参考 22 三、虚拟机安装centos类似参考 42 四、CentOS7.4 Linux安装与网络配置 51 五、虚拟机里的Centos7配置网络 -类似参考 52 六、虚拟机Centos7配置网络-类似参考 53 七、Linux CentOS 7的图形界面安装(GNOME、KDE等) 55 八、CentOS 7命令行安装 62 十、导入onlyoffice镜像并运行容器 65 十一、运行engineercms 65 十二、小程序的开发和使用 66 十三、windows远程访问linux
-2.0.0-bin-hbase1x.tar.gz hadoop-2.7.2.tar.gz hbase-1.1.9-bin.tar.gz jdk-8u144-linux-x64.tar.gz zookeeper 安装过程: 三个大步骤就可以完成环境的部署了,酒足饭饱,泡好茶客官准备开始咯: 1.更改服务器名称: 192.168.6.220 hadoop 这一行就是我们添加192.168.6.220 就是本地IP jdk-8u144-linux-x64.tar.gz zookeeper-3.4.8.tar.gz 为了整洁方便使用, 我统一解压放在根目录workspace ,jdk放在/user/java/目录下 yarn.nodemanager.remote-app-log-dir</name> <value>/YarnApp/Logs</value> </property> </configuration> slaves 由于是单机部署 样例数据且启动主角 Kylin A.导入实例数据:/workspace/kylin/bin/sample.sh B.启动Kylin :/workspace/kylin/bin/kylin.sh start
本文将介绍etcd集群的原理和部署文档。etcd集群原理etcd是一个强一致性的系统,它采用Raft协议作为一致性算法。 etcd集群部署文档etcd集群可以在多台服务器上部署,以保证高可用性。下面是etcd集群的部署文档:步骤1:安装etcd在所有节点上安装etcd,可以从etcd官网下载二进制文件进行安装。 系统上可以通过以下命令安装etcd:shellCopy code$ curl -L https://github.com/etcd-io/etcd/releases/download/v3.5.0/etcd-v3.5.0-linux-amd64 .tar.gz -o etcd-v3.5.0-linux-amd64.tar.gz$ tar xzvf etcd-v3.5.0-linux-amd64.tar.gz$ cd etcd-v3.5.0-linux-amd64 要部署etcd集群,需要在每个节点上安装etcd软件,并创建etcd配置文件,指定节点的IP地址、端口号、数据存储目录和集群配置。
以下是 Qt 开发麒麟 Linux 桌面应用程序的详细流程:1.准备开发环境麒麟 Linux 系统: 确保你有一台安装了麒麟 Linux(例如 Ubuntu Kylin 或 Kylin OS)的机器。 Linux 版本的官方文档。 集成 Kylin-SDK (可选): 如果你安装了 Kylin SDK,可以查阅其文档,了解如何调用麒麟特有的 API 来实现更深度的系统集成或使用其定制的 UI 组件。 部署工具:linuxdeployqt: 这是 Qt 官方推荐的 Linux 部署工具。它可以自动收集你的应用程序所需的所有 Qt 依赖库,并将它们打包到一个可分发的目录或 AppImage 文件中。 国产化适配: 如果你的应用程序需要与麒麟生态系统中的其他国产软件或硬件进行深度集成,可能需要查阅麒麟 Linux 的官方文档和 Kylin SDK,了解其提供的特定 API 或接口。
一、环境 基础环境设置 主机名修改: hostnamectl set-hostname linux-node1 修改 host 文件 10.200.51.100 linux-node1 linux-node1 .limi.com 10.200.51.31 linux-node2 linux-node2.limi.com linux-node1 10.200.51.100 控制节点 linux-node2 安装 # yum install etcd 配置 [root@linux-node1 ~]# grep -v "^#\|^$" /etc/etcd/etcd.conf ETCD_DATA_DIR=" ~]# systemctl start etcd [root@linux-node1 ~]# systemctl enable etcd 二、安装 openstack 服务 2.1 Keystone -------------------------------------------------------------------+ ---- 标题:openstack系列- keystone部署文档